How Many Participants for Quantitative Usability Studies: A Summary of Sample-Size Recommendations定量可用性測試參與人數建議
對於大多數定量研究,推薦招募40名參與者,但某些情況下可減少人數。
定量可用性測試的參與人數需求因研究目標和方法而異。
- 少數參與者: 可能導致統計結果不可靠。
- 過多參與者: 浪費資源。
這篇文章探討為何推薦40人,以及在何種情況下可以減少參與人數。
兩種研究方式:
- 定性研究(Qualitative): 目標是洞察問題,通常需較少參與者。
- 定量研究(Quantitative): 關注指標,需要保證統計可靠性(本文主要討論)。
為什麼需要40名參與者
定量研究中,我們收集代表使用者體驗的量化指標,例如:
- 成功率
- 轉化率
- 平均任務時間
40名參與者是計算得出的結果,能確保結果對總體行為的預測具有合理準確性。
統計假設:
- 使用者群體超過500人(大樣本)。
- 目標是估算二元指標(如成功率)。
- 允許15%誤差範圍(即,真實值與樣本值差異小於15%)。
- 95%置信水平(錯誤機率僅為5%)。
減少參與人數的情況
情況1:允許更大的誤差範圍
當誤差範圍更大時,可減少參與者人數。例如:
- 20%誤差範圍:僅需21人(95%置信水平)。
情況2:接受更高風險
當置信水平降低(例如90%),可減少參與者人數:
- 15%誤差範圍:需28人。
- 20%誤差範圍:需15人。
參與者需求對比表:二元指標
| 置信水平 | 誤差範圍 | 參與人數 |
| 95% | 15% | 39 |
| 95% | 20% | 21 |
| 90% | 15% | 28 |
| 90% | 20% | 15 |
連續指標的參與者需求
如果指標是連續變數(如任務時間、滿意度評分等),則所需人數取決於總體資料的 標準差。
- 推薦假設:標準差為 均值的52%。
例如:
- 如果任務時間平均為1分鐘,則標準差約為0.52分鐘。
- 如果任務時間平均為10分鐘,則標準差約為5.2分鐘。
參與者需求對比表:連續指標
| 置信水平 | 誤差範圍(均值的百分比) | 參與人數 |
| 95% | 15% | 47 |
| 95% | 20% | 26 |
| 90% | 15% | 33 |
| 90% | 20% | 19 |
- 推薦人數: 40人是最優選擇,能提供高置信水平和合理誤差範圍。
- 可減少人數: 如果接受更大誤差範圍或更高風險,可減少至20–30人。
- 最佳化策略: 預算緊張時,可從20–25人開始,計算誤差範圍後決定是否需要增加參與者。
核心原則: 平衡資料質量與資源投入,確保研究結果既可靠又經濟。